Inducing Task Models from Computer-Use Traces
从计算机使用轨迹中归纳任务模型
🧭 Agent 技能归纳与任务建模
Stanford University · Carnegie Mellon University
提出 TMI,自动从交错的低层级操作轨迹中分离潜在任务并构建分层目标与控制流模型,显著提升智能体技能迁移
📌 工作参考价值(4 点)
- 在电商客服/运营自动化等 computer-use agent 场景中,可借鉴 TMI 从员工真实操作日志(点击、输入、页面跳转)自动归纳标准作业流程(SOP)及其子目标层次,即使用户同时处理多个任务也能分离,用于构建可复用的 agent 技能库。
- 技能迁移路径值得复用:先归纳出结构化任务模型(目标分解+控制流),再将其转化为 agent 可调用的技能或 few-shot 示例;论文显示该方式在 held-out 任务上相对最强基线提升 30.0%,说明结构先验对泛化有帮助。
- 任务模型同时包含目标层次和执行流程,比端到端 policy 更可审计、可解释,适合风控/合规要求高的电商自动化流程(如营销活动配置、订单异常处理)。
- 低层事件抽象成步骤、再聚类/归纳分层目标的做法,可作为用户行为序列建模中从点击流恢复用户意图/任务的参考,辅助电商场景下的多会话用户建模与 query 理解。